Analyze Usability Test Data in 4 Steps 4步分析可用性測試資料

Why Analyzing Qualitative User Tests Is Complicated 為什麼分析定性使用者測試如此複雜

教科書說分析使用者測試資料很簡單,只要記錄問題、總結表現和統計錯誤就行。但實際上沒那麼容易,特別是在以下情況:

讓我們看一個實際例子:我們要測試一個新的產品詳情頁面。使用者需要在這個頁面上找到並選擇合適的產品。我們想要了解:

要回答這些問題,一個簡單的測試任務是不夠的。我們需要:

Analysis and Synthesis 分析與綜合

從要從資料得出見解和建議,我們需要做兩件事:分析和綜合。

分析就是把複雜的資訊拆開來仔細看,綜合則是把這些資訊重新組合,找出有價值的發現。簡單來說,當我們說"分析"的時候,其實包含了這兩個步驟。

分析就是把資料分成小塊來研究,綜合則是把這些小塊重新組合,找出有用的發現。在實際工作中,我們會不斷地在分析和綜合之間來回切換。

Analysis and Synthesis 分析可用性測試資料的4個步驟

  1. 收集資料:找出測試中對我們有用的觀察和使用者說的話。
  1. 檢查資料:看看收集的資訊是否準確和相關。
  1. 理解資料:把資料和我們的專業知識結合起來,回答研究問題。
  1. 驗證結論:用資料來檢查我們的理解是否正確。如果發現不對,就要重新思考。

這個過程並不是一步接一步完成的。特別是在理解和驗證階段,我們經常需要反覆推敲。比如,我們可能先根據印象深刻的資料得出初步想法,但當我們用更多資料來驗證時,可能會發現一些問題或矛盾,這時就需要調整我們的想法。這樣的調整可能要做很多次。

分析可用性測試資料有4個主要步驟。我們需要收集資料、檢查資料質量、理解資料含義,最後確認我們的理解是否正確。

Step 1: Collect Relevant Data 第一步:收集相關資料

可用性測試會產生很多資訊。在第一步中,我們要找出對研究有幫助的資訊。這就像在果園裡挑選好的蘋果一樣。我們會看測試記錄、筆記和影片,記下重要的觀察結果和使用者說的話。

比如說,如果我們想知道使用者是否容易找到產品比較功能,我們會關注:

Step 2: Assess for Accuracy 第二步:檢查資料質量

接下來,我們要判斷每條資訊的可靠程度。不是所有資訊都一樣重要。比如,有時使用者說喜歡某個功能,但實際上從沒用過。或者他們只是在回答引導性的問題。我們需要考慮這些因素。

Step 3. Explain the Data 第三步:理解資料含義

在這一步,我們把觀察到的現象和我們的專業知識結合起來,試著解釋使用者的行為。有時候同一個現象可能有不同的解釋。舉個例子,如果所有使用者都沒找到比較功能,可能有這些原因:

Step 4. Check for Good Fit 第四步:確認我們的理解

最後一步是檢查我們的解釋是否正確。我們要用收集到的資料來驗證,看看是否有證據支援我們的想法。如果發現矛盾的地方,就需要重新思考。

比如,如果我們認為"使用者不需要比較功能",但資料顯示使用者在比較產品時很費勁,那這個解釋可能就不對。